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Abstract of DE1 01 59574 

The movement correction method uses an imaging system with at least 3 cameras (10,1 1 ,12) for 
monitoring the relative movement between the robot gripper or machining tool and the workpiece. The 
workpiece is placed in a standard position and the imaging system is moved from an initial position into 
a series of defined positions, with storage of the obtained camera images and/or the image data in 
each position, for comparison with actual Images for detection and correction of movement errors. An 
Independent claim for a device for 3-dimensional relative movement correction for a robot gripper or 
machining tool is also included. 
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@ Vorrichtung und Verfahren zur Korrektur der Bewegung von Greif- und Bearbeitungswerkzeugen 
@ Die Erfindung betrifft ein Verfahren und eine Vorrich- 
tung zur dreidimensionalen Korrektur der Relativbewe- 
gung mit mehreren Freihei'tsgraden zwischen Werkstuk- 
ken einerseits und Greifer oder Werkzeugen andererseits, 
mit einer Blldaufnahmeeinrichtung aus einer oder mehre- 
ren Kameras, wobei die Blldaufnahmeeinrichtung und/ 
" oder das Werkstuck reproduzierbar beweglich ist, mit el- 
nem Einrichtbetrieb und/oder Automatikbetneb. In einem 
Einrichtbetrieb werden ein oder mehrere Bereiche des 
Werkstucks uber je mindestens einen den Bereichen zu- 
geordneten Abbildungsstrahlengang des Werkstucks ab- 
gebildet, mindestens ein Bild uber jeden Abbildungs- 
strahlengang aufgenommen und Bilder und/oder davon 
abgeleitete Oaten gespeichert, wobei die Bildaufnahme- 
einrichtung bzw. das Werkstuck sich in einer Ausgangsla- 
ge bzw. Standardlage befinden und der Vorgang wieder- 
^ holt wird fur die Relativlagen, in denen jeder Freiheits- 
grad mindestens einmal gegenuber der Ausgangslage 
l*> bzw. Standardlage variiert wird. Alternatfv oderzusatzlich 
O) wird in einem Automatikbetrieb mindestens ein Bild von 
y> jedem der Bereiche des Werkstucks uber je mindestens 
^ einen der ihnen zugeordneten Abbildungsstrahlengange, 
^ in Ausgangslage der Blldaufnahmeeinrichtung Oder einer 
^ zur Ausgangslage reproduzierbar abweichenden Lage, 
aufgenommen und durch einen Vergleich der aufgenom- 
UJ menen Bilder und/oder der davon abgelerteten Daten mit 
Q Bildern bzw. Daten der entsprechenden Abbildungsstrah- 
lengange aus einem Einrichtbetrieb eine aktuelle ... 
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Beschreibung 

[0001] Die Erfindung betrifift eine Vorrichtung und ein 
Verfahrcn zur Kotrektur der Bewegung von Greif- oder Be- 
arbeitungswerkzeugen rclativ zu GcgenstSnden in unbe- 5 
kannter oder ungenauer Lage, insbesondere mittels Robo- 
tem. 

[0002] Wenn die GegcnstSnde in fester Position und Qri- 
entierung prasentiert werden, kann das Greifen oder Bear- 
beiten mittels Roboter ohne Modifikation einer einmal ein- 10 
programmierten Bewegung geschehen. 1st die Lage der Ge- 
genstande unsicher, z. B. aufgrund von Unsicherheiten der 
Teileaufnahme, so muss fiir das Greifen oder Bearbeiten die 
Bewegung des Greif- bzw. Bearbeitungswerkzeugs und da- 
mit die des Roboters korrigiert werden, 15 
[0003] Beispiele fiir das Greifen sind die Entnahme aus 
Fonnfolien, Regalen oder Gitterboxen. Beispiele fur das Be- 
arbeiten sind das Schleifen oder der Klebemittelauftrag; zur 
Bearbeitung sind ebenso zu zShlen das Montieren und das 
Fiigen, wie beispieisweise das Montieren von Anbauteilen 20 
wie Scheiben oder RSdem an Automobil-Karossen oder das 
Einsetzen oder Anschwcissen von Bolzea. 
[0004] Zum besseren Verstandnis der Erfindung werden 
im folgenden hier verwendete BegrifiFe naher eriautert 
[0005] Da es sich bei den Gegenstanden meist um Werk- 25 
stucke handelt, wird im folgenden von Werkstiicken gespro- 
chen, im verallgemeindemden Sinn izgend eines, beziiglich 
der Genauigkeitsforderungen der Anwendung hinreichend 
starren Gegenstandes. 

[0006] Unter Werkzeug ist im folgenden je nach Aufga- 30 
benstellung verallgemeinemd entweder der Greifer oder das 
Bearbeitungswerkzeug zu verstehen. 

[0007] Als Lage wird im folgenden die dreidimeosionale 
Position und Orientierung im Raum (englisch "position and 
attitude") bezeichnet Die Lage eines Werkstucks wird durch 35 
mindestens 6 Parameter beschrieben, i.d.R. durch drei trans- 
latorische und drei rotatorische, mit denen ein werkstucksfe- 
stes Koordinatensystem in Bezug zu festen Raumkoordina- 
ten steht. 

[0008] Der mehrdimensionale endliche Raum der in der 40 
vorliegenden AufgabensteUung moglichen Lageabweichun- 
gen (i.d.R. ein 6-dimensionaler Hypen^uader) wird im fol- 
genden als Arbeitsbereich bezeichnet. Je genauer die Halte- 
rung der Werkstucke, desto kleiner darf der Arbeitsbereich 
sein. 

[0009] Der Begriff Roboter ist hier allgemein zu verstehen 
im Sinne eines mechanischen oder virtuellen Systems rait 
programmierbarer oder per Algorithmus steuerbarer oder re- 
gclbarer Bewegung. Durch die Bewegung wird die Relaliv- 
lage von Werkzeug und Werkstuck verandert, wahlweise 50 
Werkzeug gegen Werkstuck oder umgekehrt oder bei des. 
[0010] Unter der Anzahl der Freihcitsgrade ist die Ach- 
senzahl des verwendeten Roboters zu verstehen. Normaler- 
weise liegen 6 Freiheitsgrade vor. Es sind jedoch je nach Si- 
tuation auch mehr Freiheitsgrade moglich oder weniger. Es 55 
kann Roboterachsen geben, deren Bewegung/Stellung zur 
Losung der hier gestellten Aufgabe grundsatzlich nicht ver- 
andert werden muss; sie zahlen hier nicht zu den Freiheits- 
graden. 

[0011] Ira Einrichtbetrieb (Offline-BeUieb) eines Systems 60 
wird - i.d.R. unter menschlicher Uberwachung oder Fuh- 
rung - das System fiir die Anwendung parametriert, ein- 
schliesslich z. B. Teachen einer Roboterbahn, Teachen eines 
Bildanalysesystems und Kalibrierung, sofera erforderlich. 
[0012] Im Automatikbetrieb (Online-Betrieb) arbeitet das 65 
System selbsttatig oder halbautomatisch entsprechend der 
vorliegenden AufgabensteUung. 

[0013] Unter der Standardlage eines Werkstucks verste- 
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hen wir im folgenden eine zufallig oder speziell gewahlte 
Lage, fur die der Roboter cingctcacht wird. Aufgabe ist es, 
das Werkstuck auch in einer von dieser Standardlage abwei- 
chenden Lage koirekt zu greifen oder zu bearbeiten. Die 
Standardlage braucht nicht in irgcndeiner bekannten Bezie>- 
hung zu den Raumkoordinaten zu stehen. Salopp gespro- 
chen kdnnte n:ian das Werkstuck auf einen Hscb werfen, und 
die so entstandene zuMlige ubd geometrisch unspezifizierte 
Lage als Standardlage zum Teachen verwenden. 
[0014] Ausgangslage ist eine im aUgemeinen beim Iba- 
chen festgelegte Lage von Systemkomponenten, in der im 
Automatikbetrieb die jeweils ersten Bildaufnahmen durch- 
gefiihrt werden. 

[0015] Als Fixmerkmale (hier speziell eingefuhrter Be- 
griff) werden solche Merkmale eines Werkstucks bezeich- 
net, die ortsfest auf den Werkstiicken vorhanden sind, wie 
"von Natur aus" vorhandene Formen wie Kanten, Ecken, 
Locher, Sicken, aber auch kiinstliche Marken (werkstuckbe- 
zogen ortsfest angebrachte Aufdrucke, Pragungen, Klebe- 
punkte oder werkstiickbezogen oitsfeste Projizierungen wie 
Laseipunkte oder Lasermuster). 

[001^ Fixmerkmale sind auch solche, die unter Zuhilfen- 
ahme von strukturiertem Licht ein Muster erzeugen, das 
werkstOckbezogen ortsfest ist. Dies kann zur Erfadbung der 
Storsicherheit sinnvoll sein: beispieisweise kann man, um 
Werkstiickkanten zuverlassiger darzustellen, ein diinnes Li- 
nienmuster auf die Oberfiache projizieren und mittels eines 
angepassten Softwarefilters die Regionen mit Streifenmu- 
sler hervorheben, um eine sichere Figur-Hintergrund-Tren- 
nung zu erhalten (auf dem Hintergrund befindet sich kein 
Streifenmuster mit passenden Linienabstanden). 
[0017] Als ausgezeichnete Punkte werden solche Fix- 
merkmale bezeichnet, die durch Punkte reprasendert wer- 
den, z. B. die Mitte eines Kreises oder ein Eckpunkt einer 
Kontur, gegeben als Schnittpunkt von zwei Geradenstucken. 
[0018] Zusatzlich zu den werkstiickbezogen orts festen 
Merkmalen konnen nicht ortsfeste, beleucbtungstechnisch 
erzeugte Merkmale verwendet werden. Diese werden in fol- 
genden als Flexmerkmale bezeichnet (hier speziell einge- 
fuhrter Begriff). 

Beispiele fiir Flexmerkmale 

a) Wolbungen: Bei Bewegung der Kamera gegeniiber 
dem Werkstuck und gerichteter Beleuchtung wandem 
die Reflexionskanten auf der Wolbung relativ zum 
Werkstuck und verformen sich ausserdem. Sie sind 
nicht werkstiicksbezogen fest, aber reproduzierbar und 
zur Gewinnung der LageiniPormation geeignel. 

b) Projektion von Lichtmustem (i.d.R. mittels Leser 
realisiert): die sich hierbei ergebenden Formen konnen 
grundsatzlich zur dreidimcnsionalcn Auswertung her- 
angezogen werden; da normalerweise die Beleuchtung 
nicht parallel mit dem Werkstiick bewegt wird, sind die 
Formen nicht werkstiicksbezogen fest. 

[0019] Merkmale sind Fixmerkmale oder Flexmerkmale. 
[0020] Ein Merkmal ist i. a, dreidimensional; die Abbil- 
dung eines ein Merkmal umfassenden Werkstuckbereiches 
in ein zweidirtiensionales Koordinatensystem iiber ein 
Strahlenbiindel, im folgenden auch AbbildungssUrahlengang 
genannt, wird als Merkmalsbild bezeichnet 
[0021] Ein solches Merkmalsbild kann weiter iiberfiihrt 
werden in eine kompaktere Beschreibung in Form eines t- 
dimensipnalen Bildbeschreibungsvektors von Werten, wl, 
w2, . . . wt, mit t > = 1. In der Regel gilt t > = 2. 
[0022] Die Komponenten des Bildbeschreibungsvektors 
sind Masszahlen, die Eigenschaften der Abbildung von 
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Merkmalen in MeikmalsbildeiD erfassen. Einfadistes Bei- 
spiel, mit t s 2, ist die Messung des Schwerpunktes der Ab- 
bildung eines Lochs, der durch die beiden Schwerpunkts- 
Bildkoordinaten beschrieben wird. Ein weiteres Beispiel ist 
die Berechnung von Verschiebung und Vcrdrehung eines be- 5 
liebig strukturiertenBildmusters uber Korrelationsverfahren 
(t = 3). Wie weiter unten anhand der Ausfiihrungsbeispiele 
zu der Erfindung er lautert wird, sind fiir den Bildbeschrei- 
bungsvektor auch Masse geeignet wie Grossenveranderung, 
Helligkeits- und Farbveranderung, Ortsfrequnzveranderun- 10 
gen - also Werte, die keine Verschiebung oder Verdrehung 
in Bildkoordinaten beschreiben. 

[0023] Die triviale Art, einen Merkmaisvektor aus einem 
Grauwert-Merkmalsbild mil der Grosse nx mal ny Pixel zu 
bestinunen, besteht darin, einfach all&Pixelgrauwerte direkt IS 
in einen Bildbeschreibungsvektor mit nx mal ny Kompo- 
nenten zu tiberfuhren. 

[0024] Durch die Zusamnienfassung mehrerer Bildbe- 
schxeibungsvektoren, die derselben (i. a. unbekannten) me- 
chanischen WerkstQckaufhahmesituation (z. B. der Aus- 20 
gangslage) zuzuordnen sind, entsteht ein Vektor, der ini fol- 
genden als Lagebeschreibungsvektor bezeichnet wird. 
[0025] Wohlgemerkt beschreibt der Lagebeschreibungs- 
vektor die zu bestinunende Lageabweichung nicht direkt, 
sondem impUzit! 25 
[0026] Eine Korrektur der Roboterbewegung kann abge- 
leitet werden aus der Abweichung der aktuellen Lage von 
der Standardlage. 

[0027] Diese Abweichung wird nach der konventionellen 
Vorgchehsweise ermittelt, indem ein werkstuckeigenes Ko- 30 
ordinatensystem definiert wird, und indem die absolute 
Lage des Werkstucks sowohl fur die Standardlage als auch 
fur die aktuelle Lage besdmmt wird. Fiir die Bestimmung 
einer absoluten Lage mittels optischer Sensoren, spezieU 
Bildveraibeitungssystemen, werden in der Literatur zweier- 35 
lei Methoden angegeben: 


a) modellbasierte Methoden, 

b) dreidimensional messende Systeme. 


[0028] Modellbasierte Systeme verwenden die bekannte 
Geomeirie von Fixmerkmalen im werkstiickeigenen Koor- 
dinatensystem. 

[0029] Zu modellbasierten Verfahren zahlen zum Beispiel 
[GMR], [Fan], [Isr]. Bei aUen drei Beispielen muss der Be- 45 
zug der Merkmale zu einem korpereigeneo Koordinatensy- 
stem bekannt sein. [OMR] verwendet Punkte oder Punkte 
und Linien, eine oder mehrere Kameras. [Isr] verwendet nur 
Linien, drei oder mehr Kameras. [Fan] verwendet Punkte, 
drei oder mehr Kameras, aus^erdem einen Eichkorper, der 50 
fur die Kalibrierung vor jede Kamera zu posidonieren ist. 
[0030] Nachteile der modellbasierten Methoden sind: 

- die Lage der Merkmale im werkstiickseigenen Koor- 
dinalensystem muss bekannt sein, 55 

- die Kamera muss aufwendig kalibrierl werden, 

- sie konnen grundsatzlich keine Flexnierkniale hand- 
baben. 

[0031] Bei dreidimensional messenden Systemen braucht 60 
die Teilegeometrie nicht bekannt zu sein; mit ihnen werden 
beispielsweise handgefertigte Modelle abgetastet zur Gene- 
rierung von CAD-Daten fur die Serienproduktion. 
[0032] Ein anderes Beispiel ist die Balmregelung mittels 
LichLschnittverfahren. 65 
[0033] Die Messmethoden fur dreidimensional messende 
Systeme sind: 


bl) punktweise Abstandsmessung iiber gepulstes oder 
mpduliertes Licht, zusammen mit Messung der Licht- 
Laufzeit bzw. Phasenverschiebung, 
b2) Triangulation iiber mindestens eine Kamera und 
sU*ukturiertes Licht, 

b3) Trianguladon uber mindestens 2 Kameras (Ste- 
reo). Nachleilig ist die Methode bl) mit einem sehr ho- 
hen apparativen Aufwand verbunden und erfordert eine 
aufwendige, stabile Messtechnik. 

[0034] Nachteilig ist die Methode b2) mit hohem appara- • 
tivem Aufwand verbunden und erfordm Uberdies einen sehr 
hohen Aufwand bei der Kalibrierung der Systeme; Kamera- 
und BeleuchtungsgeomeUie miissen bekannt und sehr stabil 
sein. 

[0035] Bei messenden Systemen zur Abtastung von Ober- 
flachen nach Methode b2) kann der Sensor definiert bewegt 
werden, um fOr grossflSchige Werkstiicke den Messbereich 
solcher Systeme in Verbindung mit einer bekannten mecha- 
nischen Bewegung zu erweitera: 

Nach [Dif| wird der Sensor entweder entsprechend einer 
vorher bekannten Idealform bewegt und der (b2-)Sensor 
vermisst Abweichungen davon, oder der Sensor dient als 
Null-Indikator, um eine geregelte Bewegung in konstantem 
Abstand von der Oberflache zu erzeugen, wobei diese Be- 
wegung als Messergebnis dient 

[0036] Nach [Per] dient ein Roboter zur Fiihrung eines 
(b2-)Sensors, wobei die im aUgemeinen nicht ausreichende 
Genauigkeit des Roboters durch eine von Roboter und Sen- 
sor unabhangige, nicht naber beschriebene Zusatzeinrich- 
tung (Z.B. zusatzliches "Photogrammetrie"-Systcm odier 
"Kinematic correction module") erhohu 
[0037] Bei Stereoverfahren (b3) werden die selben Merk- 
male von jeweils mindestens 2 Kamearas erfasst; aus der Dis- 
paritat der Abbildung der Merkmale in den Bildem und aus 
den bekannten Daten der Kamera-Geometrie wird die drei- 
dimensionale Lage der Merkmale berechnet Die Werk- 
stiickgeometrie und die Lage der Merkmale im Werkstuck- 
koordinatensystem braucht im allgemeinen nicht bekannt zu 
40 sein. 

[0038] Ein Nachteil der Stereoverfahren ist, dass verschie- 
dene Kameras gleiche Merkmale erfassen mussen. Daraus 
ergibt sich ein Problem bei grossen Werkstiicken: Um die er- 
forderliche Rotadonsgenauigkeit zu erzielen, mussen meh- 
rere moglichst weit auseinander liegende Merkmale erfasst 
werden. Das fUhrt dazu, dass 

- entweder die Bildfelder sehr gross werden, was nun 
doch wiedcrum zu Geiiauigkcitsproblemen wegcn ge- 
ringer Bildpunktaufldsung fuhrt, 

- oder dass fur weit auseinanderliegende Merkmale je 
zwci Kameras erforderlich sind, fiir drei weit auseinan- 
der liegende Merkmale also insgesamt mindestens 6 
Kameras (s. z. B. [Lee]). 

[0039] Ausserdem durfen sich die Merkmale bei veran- 
derter Beleuchtungs- und BeLrachtungsgeomelrie nicht an- 
dem. Fleanerkmale verbieten sich daher vielfach. 
[0040] Stereoverfahren sind ausfuhrlich in [Kle] beschrie- 
ben. 

[0041] Ein gravierender Nachteil der Uianguiierenden 
Messverfahren (b2 und b3) ist die Notwendigkeit der ge- 
nauen Kalibrierung, Kamera(s) und ggf. sUiikturierte Be- 
leuchtung betrelfend; ausserdem muss der Aufbau sehr sta- 
bil sein, um die geforderte Messgenauigkeit auch im rauen 
Indusuiebetrieb aufrechterhalten zu konnen. 
[0042] Anmerkung: Die Kalibrierung einer Kamera be- 
schreibt die Abbildungsgeometrie; man unterscheidet ubli- 
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cherweise aussere und innere Parameter. Die ausseren Para- ■ 
meter beschicibca die Lage dcs Projcktionszentrums und 
der optischen Achse im Raum, sowie den (skalaren) Ab- 
stand zwischen Frojektionszentrum und Abbildungsebene. 
Die inneren Parameter beschreibcn die Schraglage der Ab- S 
bildungsebene zur optischen Achse und die Lage des Durch- 
stosspunktes der opiischen Achse durch die Bildebene rela- 
tiv zum Bildrahmen. 

[0043] In jiingerer Zeit entstand das Arbeitsgebiet "Visual 
Servoing", im folgenden kurz Servoverfahren genannt 10 
[Hut], Hier wird versucht, mit uhkalibrierten oder ungenau 
kalibrierten Systemen liber optische Riickkopplung eine Re- • 
gelung von Robotem zu realisieren. Wahrend der Roboter- 
bewegung wird versucht, die Position der Merkmale in den 
Merkmalsbildem rhoglichst genau auf Soil zu bringen. Dies 15 
impliziert die Moglichkeit der Berechnung der Position von 
Merkmalen im Bildbereich. 

[0044] Anmerkung: Bei einer Regelung wird im Gegen- 
satz zu einer Steuerung durch die RiickfUhrung einer Mess- 
grosse (hier der Position der Merkmale in den Merkmalsbil- 20 
dem) auf eine Stellgidsse (hier der Roboterstellung) einge- 
wirkt. Bei Servoverfahren sind daher laufende Bildaufhah- 
men wahrend der Bewegung erforderlich, um die Abwei- 
chung der Messgrossen von den SoUwerten durch die Bewe- 
gung zu minimieren. 25 
[0045] Bei Servoverfahren kann die folgende Fallunter- 
scheidung getroffen werden: 
[0046] Falll 

[0047] Hand-Auge-Koordinadon ("hand-eye-coordina- 
tion") 30 
[0048] Bei Hand-Auge-Koordination wird das Werkzeug 
relativ zu den(r) Kaniera(s) bewegt. 

[0049] Die Kamera erfasst das Werkzeug oder Telle davon 
oder Markiemngen oder mechanische Telle, die in geometri- 
scher Beziehung zum Werkzeug stehen. 35 

Unterscheidung nach Bewegung 

Fall la: Das Werkzeug wird bewegt und die Kamera steht 
fest. 40 
Fall lb: Das Werkzeug steht fest und die Kamera wird be- 
wegt. 

Fall Ic: Das Werkzeug und die Kamera werden beide be- 
wegt, bei spiels weise konnen verschiedene Freiheitsgrade 
verteiit v/crdea auf Werkzeug und Kamera. 45 

Unterscheidung nach Bilderfassung 

FaU Ix: Die Kamera erfasst das Wcrkstiick und das Werk- 
zeug (Standard?all). 50 
Fall ly: Die Kamera erfasst das Werkstuck und nicht das 
Werkzeug. 

Fall Iz: Die Kamera erfasst nicht das Werkstuck und erfasst 

das Werkzeug. 

[0050] Im FaU Ix kann die Robotcrposition in Bezug auf 55 
die aktuelle Werkstiicklage gesteuert oder geregelt werden. 
[0051] Im Fall ly kann die Roboterposition in Bezug auf 
die aktuelle Werkstiicklage gesteuert werden. 
[0052] Im Fall Iz kann nur eine Regelung der Robolerbe- 
wegung an sich realisieri werden, nicht aber im Bezug auf 60 
die aktuelle Werkstuckposition. 
[0053] Fall 2 

[0054] Auge-in-Hand ("eye-in-hand") 

[0055] Bei Auge-in-Hand wird (werden) die Kamera(s) 

parallel mit dem Werkzeug relativ zum Werkstuck bewegt. 65 


Unterscheidung nach Bewegung 

FaU 2a: Das Werkzeug und Kameras werden bewegt und das 
Werkstuck steht still. 

FaU 2b: Das Werkzeug und Kameras stehen fest und das 
Werkstuck wird bewegt 

FaU 2c: Das Werkzeug und Kameras werden gemeinsam be- 
wegt^ und das Werkstuck wird bewegt, bei spiels weise kon- 
nen verschiedene Freiheitsgrade verteiit werden auf Werk- 
zeug und Kamera einerseits und Werkstuck andererseits. 

Unterscheidung nach BUderfassung 

FaU 2x: Die Kamera erfasst das Werkstuck und das Werk- 
zeug. 

FaU 2y: Die Kamera erfasst das Wcrkstiick und erfasst nicht 
das Werkzeug. 

[0056] Im Fall 2x kann die Roboterposition in Bezug auf 
die aktueUe Werkstiicklage gesteuert oder geregelt werden, 
die Situation entspricht ungefahr dem FaU Ix. 
[0057] Im FaU 2y kann die Roboterposition in Bezug auf 
die aktueUe WerkstOcklage gesteuert oder geregelt werden. 
[0058] Um bei Servoverfahren die Regelung zu optimie- 
ren, wird versucht, den Zusammenhang zwischra Bewe- 
gung der Roboterachsen und der ortUchen Verschiebung der 
Abbildung von Fixmerkmalen zu modellieren. 
[0059] Vorganger der Servoverfahren sind einfache, steu- 
emd arbeitende Systeme, die jeweils einen der folgenden 
FaUe betrachten: 

- Stereo, 

- FaU Ix, 

- Tracking ohne exakte Hefenschatzung, 

mit den dementsprechenden Einschrankungen. 
[0060] Die Lineare Approximation dieses Zusammen- 
hangs um einen Arbeitspunkt wird durch sog. visueUe Ja- 
kobi-Matrix beschrieben. Fiir die Hand-Auge-Koordination 
wurde zur Gewinnung der Jakobi-Matrix vorgeschlagen, 
dass im Binrichtbetrieb ein Satz von orthogonalen Roboter- 
bewegungen durchgefuhrt wird, bei gleichzei tiger Beobach- 
tung der Bewegung der Position der Abbildung der Merk- 
male [Jal]. 

[0061] Verschiedene bekannte Verfahren der Funktionsap- 
proximation wurden vorgeschlagen: stuckweise Uneare Na- 
herung, stiickweise mit SpUnes [JaO], "Quasi-Newton"- Ver- 
fahren [Pie]. 

[0062] Bei all diesen Annaherungen wird wahrend der Re- 
gclungvorgangs einer Hand-zu-Auge-Koordinationsauf- 
gabe versucht, durch die Naherung eine Schatzung fur die 
optimale Bewegung abzuleilen, um mit der nachsten Bild- 
aufnahme eine weitere, erhofft genaucre, Schatzung durch- 
fuhren zu konnen. 

Servoverfahren haben die folgenden Nachteile 

[0063] Servoverfahren konnen in FaU Ix oder FaU 2x 
ohne KaUbrierung oder mit sehr ungenauer Kalibrierung ar- 
beiten. Im hier eingeschlossenen FaU 2y jedoch benodgen 
wir flir Zwecke der Werkstiickhandhabung oder Werkstiick- 
bearbeitung eine genaue Kalibrierung. 
[0064] Fiir Zwecke der Zielverfolgung (Tracking) durch 
Auge-in-Hand Systeme mit Servoverfahren wird die Bewe- 
gung der Position der Abbildung von Merkmalen abhangig 
von der Kamerabewegung bestimmt 


a) analytisch [Mar]: das wiederum setzt Kenntnis der 
Kamerageometrie voraus (d. h. modeUbasiert), 
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b) durch online Schatzung; Problem ist die Schatzung 
der Entfemungsabhangigkeit der Parameter in der Ja- 
cobimatrix ([Hut] S. 26); fiir das Trackirjg kommt man 
mit einer sehr groben Schatzung dieser Parameter aus, 
indem man die Selpositionen in die Nahe der opti- s 
schen Achse verlegt. Ohne zuverlassige Abstandsinfor- 
mation sind jedoch Aufgaben der Werkstilckhandha- 
buQg Oder Werkstiickbeaifoeituhg nicht 15sbar. 

[0065] Servo verfahren sind auf die explizite Ableitung 10 
von Positionsinforniation aus den Bildem angewiesen, wie 
dies beispielsweise bei Verwendung von ausgezeichneten 
Punkten reaiisierbar ist. Ohne solche explizite Positionsin- 
formation kann kein visual Servoing realisiert werden. 
[0066] Ausserdem ist bei Servoverfahren aufgrund der re- 15 
gekiden Vorgehensweise im Automatikbetricb die laufcnde 
Aufnahme und Auswertung von Bildem erforderlicb, und 
damit insbesondere eine sehr schnelle Auswertung. Damit 
ist der Ansatz auch auf relativ einfache oder hardwaremSs- 
sig unterstiitzte Bildauswertungsmethoden begrenzt 20 
[0067] Aufgabe der Eriindung ist es, ein Verfahren und 
eine Vorrichtung zur- Korrektur der Bewegung von Greif- 
oder Bearbeitungswerkzeugen relativ zu Werkstticken be- 
reitzustellen. 

[0068] Die Aufgabe wird erfindungsgemass nach An- 25 
spruch 1 bzw 1 8 gelost 

[0069] Die Erfindung ermoglicht eine derartige Korrektur 


- ohne eine Kamerakalibrierung durchfiihren zu mus- 
sen, 30 

- ohne die Geometrie des Werkstuckes oder seiner 
Merkmale kennen zu miissen, 

- ohne uberhaupt iiber posidonsmassig erfassbare 
Merkmale in den Bildem verfiigen zu mussen (bei Ser- 
voverfahren nach bisherigen Ansatzen erforderlich); es 35 
sind keine Ausgezeichneten Punkte erforderlich, 

- unter Vermeidung des oben angegebenen Nachteils 
von Stereosystemen, dass grosse WerkstUcke nur unge- 
nau oder mit sehr vielen Kameras gehandhabt werden 
konnen. 40 

[0070] Die Korrektur der Roboterbewegung ist eine geo- 
metrische Transformation einer i. a. dreidimensidnalen Be- 
wegung 

45 

a) zum Greifen: die Modifikation einer vorgeteachten 
Bewegung von einer meist festen Ausgangslage bis zur 
Greifposition fiir das aktuelle Werkstiick, 
a) zum Bearbeiten: die Modifikation einer voigetcach- 
ten Bearbeitungsbahn. 50 

[0071] Die Modifikation ist typischerweise als addidve 
Korrektur (Verschiebung, Verdrehung) auf die vorgeteachle 
Greifposition bzw. die voigeteachte Bearbeitungsbahn reali- 
siert. In Sonderfallen kann es sinnvoU sein, daraus eine 55 
nichtlinare Verzerrung der Bevvegung abzuleiten. 
[0072] Das hier beschriebene Verfahren kann auch zur 
Vorkorrektur der Bewegung eingesetzt werden, um in Ver- 
bindung mit weiteren Verfahren, insbesondere zusatzUchen 
Sensoren, eine genauere Feinkorrektur zu ermoglichen, 60 
z. B, fiirdie Schweissbahnkorrektur. 

[0073] Im folgenden werden bevorz:ugte Ausfuhrungsfor- . 
men der Erfindung unter Bezugnahme auf die Zeichnungen 
beschrieben, in denen: 

[0074] Fig. 1 eine Prinzipdarstellung einer ersten erfin- 65 
dungsgemassen Ausfuhrungsform zeigt, 
[0075] Fig. 2 eine Prinzipdarsiellung einer zweiten erfin- 
dungsgemassen Ausfuhrungsform zeigt. 


[0076] Fig. 3 eine Prinzipdarsiellung einer dritten erfin- 
dungsgemasscn Ausfuhrungsform zeigt, 
[0077] Fig. 4 eine Prinzipdarsiellung einer vierten erfin- 
dungsgemassen Ausfuhrungsform zeigt, 
[0078] Fig. 5 eine Prinzipdarstcllung einer fiinftcn erfih- 
dungsgemassen Ausfiihmngsform zeigt. 
[0079] Fig. 1 zeigt eine Anordnung mit drei Kameras 10, 
11, 12 und einem Su*ahlenbundel bzw. Abbildungsstrahlen- 
gang 20, 21, 22 pro Kamera. Die Merkmale sind Fixmerk- 
raale (Locher, Kontur) 30, 31, 32 am Werkstuck 2. Die Ka- 
meras 10, 11, 12 sind am Werkzeug 1 befesdgt. Entweder 
wird das Werkzeug 1 mit den Kameras bewegt oder das 
Werkstiick 2 wird bewegt 

[0080] Die Fixmerkmale 30, 31, 32 sind hier zwar als 
Punkte reprasentierbar, es mussen jedoch keine Punktkoor- 
dinaten berechnet werden, es gentigen einfache Bildver- 
gleichsmethoden, um die Werkstiicklage zu bestimmen. 
Ohne die erfindungsgemassen Kennzeichen zu verlassen, 
kSnnen natiirlich auch Koordinatenwerte fiir Lagebeschrei- 
bungsvektoren (Definition siehe oben) herangezogen wer- 
den. 

[0081] Fig. 2 zeigt die prinzipiell gleiche Anordnung, je- 
doch sind nur zwei Kameras 10, 11 vorgesehen. Dabei sind 
zwei Strahlenbiindel 20a, 20b mit einer einzigen Kamera 10 
realisiert. 

[0082] Fig. 3 zeigt die Verwendung eines Reflexes von ei- 
ner Lichtqueile 40 auf glatter, konvcxcr Oberflache, als Bci- 
spiel fiir ein Rexmerkmal 34. Der Reflex stellt sich auf der 
Oberflache als Fleck dar, der bei Bewegung des Werkstuk- 
kes 2 relativ zum Werkstuck wandert, dennoch ist er gceig- 
net, daraus die Werkstiicklage abzuleiten. 
[0083] Es braucht weder die Position noch die Grosse 
noch die Form des Flecks bekannt zu sein; es genugt die Tat- 
sache, dass der Fleck sicbbei Bewegung des WerksUlcks aus 
Sicht der Kamera 10 reproduzierbar andert 
[0084] Fig. 4 zeigt die Verwendung von strukturiertem 
Licht von Lichtquellen 50, 51. 52, zur Erzeugung von Flex- 
merkmalen. Die Flexmerkmale 60, 61, 62 sind projizia-te 
Lichtmuster mit irgendeiner Struktur, die nicht weiter spezi- 
fiziert zu werden braucht; weder die geometrische Form 
noch irgendwelche Abmessungen brauchen bekannt zu sein. 
Willkiiirlich wurde fiir das Beispiel ein "wildes" Punktemu- 
ster, ein Kreisring und ein Rechteck verwendet, Solcherart 
Flexmerkmale sind fur die Lage des Werkstuckes 2 signifi- 
kant 

[0085] Fig. 5 zeigt die gleiche Anordnung wie Fig. 4, je- 
doch ist die projizierende Einrichtung 50, 51, 52 nicht 
schrag, sondern tangential ausgerichtet. Die Projizierende 
Einrichtung 50, 51, 52 ist weitwinklig, so dass sich bei Be- 
wegung des Werkstucks 2 INNERHALB der BeQ-achUings- 
Slrahlenbiindel eine Verzerrung der Projektionsrausler er- 
gibt, was zur Einhaltung der Signifikanzbedingung zwar 
grundsatzlich ausreicht, aber beziiglich StabiUtat und Ge- 
nauigkeit weniger empfehlenswert ist als die slrenge Einhal- 
tung des Tangentenverbots. 

[0086] Die Berechnung der aktuellen Lage kann direkt aus 
den abgespeicherlen Bildem abgeleitet werden, wenn man 
im EinrichtbeUieb den Arbeitsbereich in alien Freiheitsgra- 
den mit ausreichend kleinen Schritten abtastet und Bildauf- 
nahmen durchfuhrt, die Merkmalsbilder speichert und im 
Automatikbeuieb nach der Lage mit dem ahnlichsten Satz 
von Abbildungen sucht Diese Brute- Force-Methode setzt 
iediglich voraus, dass sich in verschiedenen Lagen reprodu- 
zierbar unterschiedliche, der Lageinformation innerhalb des 
Arbeitsbereichs eindeutig zuordenbare k-Tupel (k = Anzahl 
der Abbildungsstrahlengange oder Strahlenbundel) von 
Merkmalsbildem ergeben. Diese Voraussetzung wird im fol- 
genden einfach Signifikanzbedingung genannt. 


DE 101 5S 

9 

[0087] Die Hnhaltung der Signifikanzbedingung ist eine 
allgemein notwendige Voraussetzung der Hrfindung und 
wird weiter unten diskutiert 

[0088] Das Verfahren lauft vorzugsweise auf das Durch- 
suchen einer mehr odcr wcnigcr grossen Datcnbank von La- S 
gebeschreibungsvektoren hinaus. Es kann eine grosse, hoch- 
dimensionale Datenbank erforderlich sein, insbesondere 
wenn man ohne Interpolation und mit langen Vektoren ar- 
beitet Fiir das effiziente Durchsuchen solcher Datenbanken 
stehen Methoden aus dem Arbeilsgebiet der Datenbanksy- 10 
Sterne bereit. 

[0089] Beziiglich Arbeitsweise im Automadkbetrieb kann 
man unterscheiden: . . 

- Nach Abtastweite: 15 

- Suche in einer Datenbank yon Lagebeschreibungs- 
vektoren, die durch feine Abtastung des Arbeitsberei- 
ches enlstehL 

- int^polierendes Arbeiten mit einer Datenbank, die 
durch grobe Abtastung des Arbeitsbereiches entsteht 20 

[0090] Im letzten Fall ist die Datenbank wesentlich klei- 
ner, da der Arbeitsbereich nur grob abgetastet wurde. An- 
schliessend wird aus mehrereD benacbbarten Lagekandida- 
ten, iiber Interpolieren der Ahnlichkeitswerte, die Lage be- 25 
sdnunt 

- Nach Datenbankinhalt: 

- Arbeiten mit grossen Lagebeschreibungsvektoren in 
Form von Merkmalsbildem 30 

- Aibeiteh mit kompakteren Lagebeschreibungsvek- 
toren (grundsatzlich sind nur 6 Vektorkomponenten er- 
forderlich, um bei 6 Freiheitsgraden eine Lagekorrek- 
tur mit nur einer Bildaufnahme pro Bundel oder Abbil- 
dungsstrahlengang zu realisieren). 35 

[0091] Diese Methoden konnen auch miteinander kombi- 
niert werden. 

[0092] Die Interpolation mit reinen Bilddaten ist unter be- 
sdmmten Voraussetzungen realisierbar: die Bildinhalte 40 
mtissen - mdglichst in verschiedenen Richtungen - struktu- 
riert sein, es soUten grobe und moglichst auch feine Struktu- 
ren vorhanden sein. 

[0093] Die den StrahlenbUndeln (auch Abbildungsstrah- 
lengang genannt) zugeordneten zweidimensionalen Koordi- 45 
natensysteme sind normalerweise (aber nicht notwendiger- 
weise) eben; sie konnen auch koplanar sein, Verschiedenen 
Strahlenbiindel werden entweder durch verschiedene Kame- 
ras realisiert (Fig. 1) oder durch dieselbe Kamera realisiert 
(Fig. 2, dort umfasst Kamera 11 das Bundel 31 und Kamera 50 
10 die Bundel 20a und 20b). 

[0094] Die Berciche durfen sich grundsatzlich iibcrlap- 
pen, sind jedoch vorteilhaftenveise disjunkt oder mit nur ge- 
ringer Uberlappung realisiert. 

[0095] Die Abgrenzung der Strahlcnbundel kann durch 55 
mechanische Begrenzung von Biidfeldem geschehen, aber 
auch - insbesondere bei Realisierung mehrerer Strahlenbun- 
del durch dieselbe Kamera - verfahrensmafiig durch Auftei- 
lung des gesamten Kamerabildes in Bereiche. Die den Be- 
reichen entsprechenden Bildausschnitte (Merkmalsbilder) 60 
bzw. davon abgeleitete Daten werden im Einrichtbetrieb ge- 
speichert bzw. im Automatikbetrieb weiterverarbeitet 
[0096] Falls alle Strahlenbiindel durch dieselbe Kamera 
realisiert werden, ist zur Einhaltung der Signifikanzbedin- 
gung erforderlich, daS nicht alle Strahlen parallel sind; ein 65 
telezentrischer Strahlengang ist in die5?em Fall also ausge- 
schlossen. 

[0097] Bei Zentralprojektion ist die Signifikanzbedingung 
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umso sicherer erfiillbar, je besser das Tangentenverbot er- 
fLillt ist; dies wiederum ist bei Verwenden einer einzelnen 
Kamera umso besser erfiillbar, je weitwinkliger das Objek- 
tiv ist. In der Praxis reicht in diesem Fall ein Objektfeldwin- 
kel von mehr als ca. 20 Grad; bevorzugt mindestens 45 
Grad; bei ca. 90 Grad Objektfeldwinkel ist das Tangenten- 
verbot am besten erfQUbar: dann konnen in einer Ebene lie- 
gende Wcrkstuckbcreiche alle mit ca. 45 Grad zur Tangente 
geschnitten werden. 

[0098] Entsprechendes gilt fur die Verwendung von insge- 
samt zwei Kameras, wobei zwei Strahlenbiindel durch eine 
von diesen zwei Kameras realisiert sind: das Tangentenver- 
bot ist umso sicherer erfiillbar, je weitwinkliger das Objekdv 
dieser Kamera isL 

[0099] Falls mehrere Strahlenbiindel durch dieselbe Ka- 
mera realisiert werden, ist es auch ausreichend, das Heraus- 
greifen der Werkstuckbereiche dieser Kamera nicht explizit, 
sondem implizit durchzufiihren. Der Bildvergleich zweier 
Werkstiickbereiche mit den entsprechenden Bereichen aus 
dem Einrichtbetrieb kann zusammenfassend in einem einzi- 
gen Schritt mit je einem Bild aus Einrichtbetrieb und Auto- 
matikbetrieb realisiert werden. 

[0100] In diesen Vergleich konnen schadlos durchaus an- 
dere Partien des Bildas aufierhalb der Bereiche einbezogen 
sein; man kann dann z. B. auch mit Gesamtbildem arbeiten, 
denn wenn die Bildpartien, die nicht die Tangentenbedin- 
gung erfiillen, sich bei Bewegung der Bildaufnahmccinrich- 
tung gegen das Werkstiick nicht verandem, liefem diese 
Bildpartien zur Bildauswertung zwar keinen Beitrag, es ist 
aber auch nicht schadlich. In diesem Fall werden die zusam- 
mengefaBten Bereiche als einzelner Bereich angesprochen, 
der iiber einen ihm zugeordneten Strahlengang abgebildet 
wird, 

[0101] Ein Bereich kann im Sonderfall auch den ganzen 
aus dem Blickwinkel der betrefTenden Kamera sicbtbaren 
Teil der Werkstiickoberflache umfassen. 
[0102] Die Strahlenbiindel entsprechen nicht notwendi- 
gerweise einer 2^ntralprojektion, wie in Fig, 1 dargestellt; 
sie konnen beispielsweise auch parallel sein, wie bei der 
Verwendung von telezentrischen Objekdven (Parallelpro- 
jektion). 

[0103] Die Begrenzung der Strahlenbundel ist nicht not- 
wendigerweise kreisformig, wie in Fig. 1 dargestellt; die 
ausgewerteten Bereiche konnen beliebig abgegrenzt sein. 
[0104] Verschiedene Strahlenbiindel konnen auch mit der 
selben Kamera in verschiedener Position und ggf. in ver- 
schiedener Einstellung (z. B, Zoom), zeitlich nacheinander 
realisiert werden. 

[0105] Ira Rahmen dor vorliegenden Erfindung konnen 
die Bildaufnahmen sowohl im Stillstand als auch wahrend 
der Bewegung erfolgen zu Zeitpunkten, wenn sich die Sy- 
stemkomponenten in den betreffenden Lagen befinden. 
[0106] Das erfindungsgemaBe Verfahren ist in beiden Fal- 
len dabei ohne Einschrankung einsetzbar. Die Praxis der in- 
dustriellen Bildverarbeitung bietet viele bewahrte Moglich- 
keilen der Bildaufnahme in der Bewegung, durch die z. B. 
das Problem der Bewegungsunscharfe unterbunden wird 
(z. B. Blitzbeleuchtung, Shuttertechnik, CMOS-Sensoren). 
[0107] Das Verfahren kann auch nut altemativ "umschalt- 
baren" Werkstiickbereichen arbeiten. Beispiel: zur Lagekor- 
rektur eines Schraubers fiir die Montage eines PKW-Rades 
mit 6 Schrauben, seien zwei altemadve Satze von je drei 
Werkstiickbereichen in einer einzigen, (kurzbrennweitigen, 
um das weiter unten erlauterte Tangentenverbot gut einzu- 
halten) Kamera definierL 

[0108] Die Bereiche sind so gewahlt, dass unabhangig 
von der Drehlage der Radnabe in mindestens einem der 
Satze von Bildbereichen in jedem der drei Bereiche inuner 
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ein Schraubenloch sichtbar ist Die den Satzen zugeordneten 
Men gen von Bereichen brauchen grundsatzlich nicht dis- 
junkt zu sein. 

[0109] Die Beziehung zwischen der Ausgangslage und 
den weiteren Lagen kann in belicbigcn EinhciteD gcracsscn 5 
sein, die diese Beziehung beschreiben, vorzugsweise in der 
Anzahl der Schritte von Veifahrachsen oder in Raumkoordi- 
naten-Inkrementcn. 

[0110] Das Speicherri von Relativlagen (Schritt £) kann 
explizit geschehen durch Abspeichem der Werle, aber auch 10 
impiizit, indem man beispielsweise in einer Prbgramm- 
schleife ledigiich entsprechende Schrittweiten und End- 
werte angibt. 

[0111] Im Automatikbetrieb kann zwischen Bildaufnah- 
men eine definierte Bewegung des.Roboters liegen 15 


a) um die Eindeutigkeit der Zuordnung mil weniger 
Kameras zu erreichen und/oder 

b) zur Gewinnung von Redundanzen und dadurch Er- 
iidhung der Genauigkeit und Storsicberheit 20 

[0112] Unabbangig davon konnen auch mehrere Bildauf- 
nahmen in gleicber Roboterposition zur Erhohung d^ Ge- 
nauigkeit und Stdrsicherheit sinnvoll sein. 
[0113] Mit dem erfindungsgemassen Verfahren kann so- 25 
wohl eine Steuerung als auch eine Regelung (ahnlich visual 
Servoing, mit mehreren Bildaufnahmen pro Strahlenbtindel) 
realisiert werden. 

[0114] Mit dem erfindimgsgemassen Verfahren kann vor- 
zugsweise auch eine mehrstufige, hierarchische Bestim- 30 
mung der Lage realisiert werden: Im einem ersten Schritt 
wird eine grobe Lagebestimmung realisiert, auf Basis einer 
batenbasis mit grober Abtastung, worauf der Roboter die 
Lage dementsprechend zunachst grob korrigiert In den fol- 
genden Schritten werden Datenbasen mit zunehmend klei- 35 
neren Fangbereichen und zunehmend kleineren Abtastwei- 
ten verwendet 

[0115] Die Signifikanzbedingung ist wie nachfolgend be- 
schrieben erzielbar: 

Wir gehen zunachst gedanklich von 3 ausgezeichneten 40 
PunkteD aus. 

[0116] In [Fis] wird gezeigt, dass aus der zweidimensiona- 
len Abbildung von 3 ausgezeichneten Punkten mil bekann- 
tem Abstand, uber eine einzelne Kamera mit bekannten in- 
neren Parametem, die ausseren Kameraparameter berechnet 45 
werden kdnnen. Dies entpricht umgekehrt der Bestimmung 
der Lage des 3-D-Punktetripels bei bekannten Kamerapara- 
metem. Umformung der die Aufgabe beschreibenden geo- 
meurischen Glcichungcn [Fis] fiihren zu einer Gleicbung 
vierlen Grades mit bis zu 4 diskreten, reellen positiven Lo- 50 
sungen. Diese Losungen konnen jedoch grundsatzlich nahe 
bcisammen liegen. 

[0117] Wenn es gelingt, durch Wahl der Geometrie der • 
SLrahlenbiindel zu garantieren, dass maximal eine Losung 
im Arbeitsbereich liegen kann, ist bei 3 ausgezeichneten 55 
Punkten und einer Kamera die Signifikanzbedingung ein- 
halLbar. Die Losungen sollten also soweitauseinanderliegen, 
dass sich im Arbeitsbereich nur eine Losung befinden kann. 
[0118] Mehrdeutigkeiien entstehen 

60 

- wenn Strahlenbiindel parallel zu den translatori- 
schen Freiheitsgraden des Roboters sind, 
- aufgrund der Rotationsfreiheits grade. 

[0119] Wenn bei Rotationen die ausgcT^ichnefen Punkte 65 
die Strahlen der Strahlenbundei tangential schneiden, fallen 
2 diskrete Losungen zusammen. Entsprechende anschauli- 
che Betrachtungen werden in [Wil] durchgefuhri fiir den- 1- 


Kamera-Fall; sie sind fur den hier vorUegenden Fall mit im 
allgemeinenen mehreren Kameras topologisch aquivalenU 
Wenn die rotierenden ausgezeichneten Punkte die Strahlen- 
biindel beinahe tangential schneiden, liegen die Schnitt- 
punkte nah beisammen. Wenn sie sie in einem grdsseren 
Winkel (z. B. > 20 Grad) schneiden, liegen sie weit ausein- 
ander. 

[0120] Bei nicht zu grossem Arbeitsbereich kann also si- 
chergestellt werden, dass im Arbeitsbereich nur eine Losung 
liegt. 

[0121] Bedingung ist bei ausgezeichneten Punkten also, 
dass bei Rotationen die ausgezeichneten Punkte die Strahlen 
der Strahlenbundei nicht tangential, sondem moglichst in ei- 
nem grosseren Winkel (z. B. > 20 Grad). schneiden. Diese 
Bedingung, zusammen mit der Forderung, dass Strahlen- 
bundei nicht parallel zu den translatorischen Freiheitsgradrai 
des Roboters sind, wird im folgenden Tangentenverbot ge- 
nannt. Sie ist leicht und auf vielfaltige Weise einzuhalten 
und beispielsweise dann erfullt, wenn die Strahlwibundel 
ein Dreibein darstellen und sich der Drehpunkt in der Mitte 
der GrundflSche des Dreibeins befindet und die Drehachsen 
nicht durch die Merkmale gehen. 

[0122] Das Tangentenverbot ist bei Flexmerkmalen auch 
dann erfullt, wenn die LICHT-StrahlenbOndel dort, wo sie 
die Flexmerkmale IrefiFen, nicht tangential zum Kreis um die 
Rotationsachsen sind. 

[0123] Das Tangentenverbot ist ein Beispiel fur die Errei- 
chung der Signifikanzbedingung. Das Tangentenverbot ist 
also eine hinreichende, aber nicht notwendige Bedingung 
fiir die Erreichung der (notwendigrai) Signifikanzbedin- 
gung. Siehe Beispiel Fig. 5: hier ist die Signifikanzbedin- 
gung auch ohne Einhaltung des Tangentenverbots erfullt. 
[0124] Andererseits ist die Einhaltung des Tangentenver- 
bots vorteilhaft, wie man aus Vergleich von Fig. 4 und Fig, 5 
entnehmen kann: In Fig, 5 verzerren sich bei Korper-Rota- 
tion die abgebildeten Muster nur geringfugig, wahrend sie 
sich in Fig. 4 deutlich verandern. 

[0125] Da es sich bei dieser Erfindung um die KORREK- 
TUR einer Bewegung handelt, sind die Arbeilsbereiche in 
der Regel ausreichend klein, um z. B. sicherstellen zu kon- 
nen, dass eine Rotationsachse nicht durch ein Merkmal hin- 
durchgeht. 

[0126] Fiur die geometrischen BetrachUangen setzen [Fis] 
und [Wil] die Kenntnis der Punkteabstande im Raum vor- 
aus; fur die vorliegende Erfindung ist diese Kenntnis nicht 
unbedingt erforderlich. Die Uberlegungen von [Fis] und 
[Wil] sind hilfreich, um zu erkennen, unter welchen topolo- 
gischen geometrischen Voraussetzungen die Signifikanzbe- 
dingung erzielbar ist 

[0127] Die Losbarkeits- und Eindeutigkeits- und Stabili- 
Latsbetrachtungen sind absU-akt-geometrische Uberlegungen 
und von den konkreten Abstandsmassen unabbangig. Die 
fiir die Bestimmung der Lageabweichung erforderliche Zu- 
salzinformation stammt aus den im Einrichtbelrieb gespei- 
cherten Daten. Lageinformation wird nur impiizit bestimmt. 
[0128] Bleibt noch der Ubergang von der Vermessung der 
Abbildung von ausgezeichneten Punkten zum Abspeichem 
und Vergleichen von allgemeinen Lagebeschreibungsvekto- 
ren, die im Extremfall direkt als Merkmalsbilder gegeben 
sein k5nnen: 

Tiber Korrelationsverfahren kann man bekanntermassen 
ohne ausgezeichnete Punkte die Verschiebung und Verdre- 
hung eines Bildes gegenuber einera Referenzbild berech- 
nen, vorausgesetzt die Bilder besitzen gewisse naherungs- 
weise reproduzierbare Strukturen, die in mindestens zwei 
Richtungen ausgepragt sind..Solche Verfahren gestatten die 
Verschiebungsberechnung auch beim Vorhandensein von 
Storungen. 
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[0129] Im allgemeineren Fall verfiigt man uber keinerlei 
positionsmassig erfassbare Merkmale, also entwedcr nur di- 
rekt iiber Bilder oder Bildbeschreibungsvektoren mit Mas- 
sen, die keine Positionen in Bildern angeben. Solcbe Masse 
sind Z.B. GrSssenverandcrung, Vferdrehung, Verzeming, 5 
Helligkeits- und Farbverandening, Ortsfrequenzverande- 
rungen. Diese Anderungen konnen auch durch geeignete 
Beleuchtungsmassaahmen gezielt herbeigefiihrt werden, 
beispielsweise durch stnikturiertes Licht oder Moird-Muster 
auf dem Werksliick. 10 
[0130] Dieser allgemeine Fall kann auf den Fall mit aus- 
gezeichneten Punkten zuruckgefuhrt werden, indem man 
sicfa vorstellt, dass bei Bewegung des Werkstucks im Raum 
sich Bildstrukturen und damit verbundene Wertetupel mit in 
einem monotonen Zusammenhang tendenziell so verandem, 15 
wie dies bei Vermessung der Bildkoordinatcn von ausge- 
zeichneten Punkten der Fall ware. 

- Wertevergleich: Zur eindeutigen Zuordnung kann 
zum Beispiel ein auf dem Werkstiick festes Gittermu- 20 
ster verwendet werden, dessen Gitterweite und Orien- 
tierung sich bei der Roboterbewegung in der Abbil- 
dung verandert; es geniigt die Berechnung der Gitter- 
weite und der Orientierung, ohne Positionsdaten zu be- 
recbnen. 25 

- Bildveigleicb: Ein begrenztes Schachbrettmuster 
zum Beispiel, dessen Rastergrosse und Orientierung 
sich bei der Roboterbewegung in der Abbildung veran- 
dert, kann durch Bildvergleich einem von mehreren 
vorher gespeichcrten Schachbrettmustem zugeordnet 30 
werden, ohne die jeweilige Rastergrosse und die Orien- 
tierung direkt zu berechnen (ein Schachbrett ist fur di- 
rekten Bildvergleich giinstiger als beispielsweise ein 
Gitter mit feinen Linien). 

35 

[0131] Damit ist plausibel gemacht, dass mit der angege- 
benen Anordnung auch bei direktem Bildvergleich, ohne 
uber irgendwelche von den Bildern abgeleitete Positions- 
werte zu verfugen, die Signiiikanzbedingung eingehalten 
werden kann. 40 
[0132] Bleibt noch der Ubergang von Hxmerkmalen auf 
Flexmerkmale. Hier gilt eine ahnliche Uberlegung: Auch 
hier sind Anordnungen realisierbar, mit denen Bildstruktu- 
ren entstehen, aufgrund derer skalare Wertetupel sich ten- 
denziell so monoton verandem, wie dies bei Vermessung der 45 
Bildkoordinaten von ausgezeichneten Punkten der Fall ist 
[0133] Beispiel eines Flexmerkmals: Die Erzeugung eines 
Gittermusters oder eines Schachbrettmusters mittels struk- 
turiertcr Beleuchtung fuhrt bei gccigncter Beleuchtungsgeo- 
metrie auf den gleichen oben geschilderten Effekl, ohne 50 
dass solche Muster auf dem Werksl iick vorhanden sein miis- 
sen. Siehe Beispiele Fig. 4 und 5. 

[0134] Zu Flexmerkmalen siehe auch das Beispiel Fig. 3. 
[0135] Im folgenden werden Vorteile der Erfindung erlau- 
tert. 55 
[0136] Es miissen nicht unbedingt konventionelle geome- 
Uische Merkmale wie Kanten, Ecken, Locher aufgenomraen 
werden. Es geniigen grundsatzlich Abbildungen, aus denen 
sich irgendwelche reproduzierbare Bildstrukturen ergeben, 
die sich in irgendeiner Weise bei Veranderung der Aufnah- 60 
megeomeirie andem und in ihrer Gesamtheit eine eindeutige 
Zuordnung zur Lage ermoglichen. 
[0137] Dazu gibt es vielerlei Moglichkeiten, 
[0138] Merkmale im oben angegebenen Sinn erfiillen 
diese Forderung bei Einhalten des oben geschilderten Tan- 65 
gentenverboLs. Solche Merkmale konnen verwendet wer- 
den, ihre Georaetrie braucht jedoch nicht bekannt zu sein. 
[0139] Auch geeignet zur Auswahl der zu erfassenden Be- 


reicbe sind beispielsweise 


- Oberflachenformen wie Sicken, Wolbungen, 

- kunstlich erzeugte Rexmerkmale (s. o.), 

- inhomogene Su-ukturen wie reproduzierbare t)ber- 
gange von Oberflachenstrukturen; beliebige metrisch 
undefinierte, aber in der optischen Abbildung reprodu- 
ziorbare Meikmale. 

[0140] Eine analytisch oder experimentelle Bestimmung 
der visuellen Jakobimatrix oder eines fiinktionellen (z. B. 
stiickweise Unear approximierenden) Zusammenhangs zwi- 
schen Roboterbewegung und der Bewegung konventionel- 
ler (d. h. mit Positionsdaten verknupfbarer) Bildmerkmale 
ist nicht erforderlich. Im allgemeinen Fall des Arbeitens mit 
einer grossen Bild-Datenbasis werden von den Bildern iiber- 
haupt keine Daten abgeleitet. Eine Darstellung iigendeines 
funktionellen Zusammenhangs erubrigt sich. 
[0141] Das hier vorgestellte Verfahren ist nicht darauf an- 
gewiesen, dass gepulstes, moduliertes oder strukturiertes 
Licht eingesetzt wird. Das hier vorgesteUte Verfahren kann 
grundsatzlich mit beliebigem Licht arbeiten, z, B. dem Ta- 
geslichL Wird eine spezielle Beleuchtung verwendet, so 
kann diese durchaus zur Erhohung der Stdranfalligkeit ge- 
gen Fremdlicht zusatzlich gepulst oder moduliert oder auf 
einen bestinunten Spektralbereich begrenztoder strukturiert 
werden. Dies ist jedoch nicht grundsatzlich erfoderlich; das 
Verfahren fallt also weder unter hi) noch unter b2) und ist - 
auch bei zUsatziicher Verwendung von strukturiertem oder 
gepulstem oder modulicrtem licht — nicht mit den mess- 
technischen Problemen der Verfahren bl) und b2) veibun- 
den. 

[0142] Bei der hier vorgestellten Erfindung betrachten im 
Gegensatz zu Stereo- Verfahren die Kameras im aUgemeinen 
unterschiedhche Merkmale, u. a. mit dem Vorteil, dass 
grosse Werkstiicke leichter und genauer zu erfassen sind, Je 
weiter die Merkmale auseinander liegen, desto genauer ist 
die Bewegungskorrektur moglich. Grundsatzlich reicht an- 
dererseits jedoch, im Gegensatz zu Stereosystemen, eine 
einzige Kamera aus. 

[0143] Im Gegensatz zu modellbasierten Systemen 
braucht die Werkstuckgeometrie oder die Lage der Merk- 
male in einem Werkstuck-Koordinatensystem nicht bekannt 
zu sein, ja sogar ein Werkstiickkoordinatensystem braucht 
nicht definiert zu sein. Die Aufgabe ist gelost, indem die Ab- 
weichung der Werkstucklage gegeniiber der Standardlage 
implizit bestimmt wird, ohne dass die geometrischen Ver- 
haltnisse bei Standardlage bekannt zu sein brauchen. Die 
wirkliche Lage des WerkstUcks im Raum braucht prinzipiell 
weder in der Standardlage noch in der im Automatikbetrieb 
angeU-offenen Lage bekannt zu sein und auch nicht berech- 
net zu werden. 

[0144] Ein Kahbrieren des Robotersysteras auf Weltkoor- 
dinalen, wie es beispielsweise in Pen] niitlels Bewegung 
von Kameras mit Bhck auf eine Kalibrierplatte rcalisiert 
wird, entfallt 

[0145] Ira Gegensatz zu kooventionellen Stereosystemen 
braucht die Kamerageometrie nicht bekannt zu sein. Die 
Lage der ebenen Koordinatensysteme im Raum braucht 
nicht bekannt zu sein. Eine Berechnung der inneren oder 
ausseren Kamerakoordinaten entfallt damit. 
[0146] Ohne mathematische MehrdeutigkeiLsprobleme 
konnen auch Systeme mit mehr als 6 Roboter-Freiheitsgra- 
den realisiert werden. Soil z. B. ein Knickarmroboter eine 
bestimmte Lage des Greifers oder Werkzeugs im Raum her- 
stellen, so kann es vorkommen, dass bestimmte Lagen mit 
mehreren verschiedenen Roboterstellungen erreicht werden 
konnen. Die damit verbundenen mathematischen Probleme 
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existieren hier nicht, da aufgrund des Vorzeiger^s in ver- 
schiedenen Robotereinstellungen ebcn nur diese (und ggf. 
dazu benacbbarte) Einstellungen fur den Automatikbetrieb 
in Frage kommen. 

[0147] £s ist nicht crfordcrlich, kunsdiche Merkmale an- s 
zubringen, .wie z. B. Klebepunkte, 

[0148] Das Verfahren gestattet eine sleuemde oder f&- 
gebide Vorgehcnsweise. 

[0149] Das Verfahren ist einsetzbar, ohne dass positions- 
massig erfassbare Merknmle in den Bildem verfugbar sein 10 
mussen. 

[0150] In einem konkreten System ist der Ubeigang von 
Rxmerkmalen zu Rexmerkmalen grundsatzlich realisierbar 
allein durch Andem der Beleuchtungseinrichtung, ohne an 
den restlichen Komponenten wie Roboter, Steuerung, insbe- 15 
sondere Bildauswcrtungsverfahren, etwas zu andem. 
[0151] Das Verfahren gestattet eine Selbstiiberwachung, 
indem verschiedene Ausgangsstellungen des Robolers defi- 
niert werden und fQr diese Stellungen, jeweils nach einer 
korrigierenden Roboterbewegung, mit zusatzlichen Bildauf- 20 
nahmen, das Erreichen des Korrekturziels ubeiprtift wird. 
Die WerkstUckiage braucht hierfik nur konstant zu sein und 
braucht nicht der Standardlage zu entsprechen. 
[0152] Die bei der Selbstiiberwachung auftretende Ab- 
weicbung kann fur eine automatische Adaption an langsam 25 
Oder geringftigig veranderliche Gegebenheiten verwendet 
werden. 
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Patentanspriiche 

1. Verfahren zur drcidimcnsionalen Korrektur der Re- 
lativbewegung mit raehreren Freiheitsgraden zwischen 
Werkstucken einerseits, und Greifer oder Werkzeugen 
andererseits, mit einer . Bildauf nahmecinrichtung aus 
einer oder mehreren, Kameras, wobei die Bildauinah- 
meeinrichtung und/oder das Werkstuck reproduzierbar 
beweglich ist 

mit einem Einrichtbetrieb mit folgenden Schritten 

a) Abbilden von einem oder mehreren Bereichen 
des Werkstucks, iiber je mindestens einen den Be- 
reichen zugeordneten Abbildungsstrahlengang, 

b) Anordnen eines Werkstucks in einer systema- 
tisch gewahlten oder zufalligen Standardlage, 

c) Anordnen der Bildaufnahmeeinrichtung in ei- 
ner Ausgangslage, 

d) Aufhehmen mindestens eines Bildes iiber je- 
• deri Abbildungsstrahlengang, 

e) Speichem der Bilder aus Schritt d) und/oder 
davon abgeleiteter Daten, und 

f) Anordnen der Bildaufnahmeeinrichtung bzw. 
des Werkstucks in Relativlagen zur Ausgangslage 
bzw. Standardlage, wobei jeder Freiheitsgrad 
mindestens einmal gegeniiber der Ausgangslage 
bzw. Standardlage variiert wird, wobei 

fur jede Relativlage: 

die Relativlage selbst explizit oder implizit ge- 
speichert wird, 

die Schritte d) und e) wiederholt werden, 
und/oder 

mit einern AutomatikbeUieb mit folgenden Schrit- 
ten 

g) Aufoehmen mindestens eines Bildes von je- 
dem der Bereiche des Werkstucks iiber je minde- 
stens einen der ihnen zugeordneten Abbildungs- 
sUrahlengange, in Ausgangslage der Bildaufnah- 
meeinrichtung oder einer zur Ausgangslage repro- 
duzierbar abweichenden Lage 

h) Vergleich der in Schritt g) aufgenonunenen 
Bilder und/oder der davon abgeleiteten Daten mit 
Bildem bzw. Daten der entsprechenden Abbil- 

. dungsstrahlengange aus einem Einiichtbeuneb, 

i) Bestimmen der aktuellen Relativlage des 
Werkstucks zur Standardlage auf Basis des Ver- 
gleichs in Schritt h) 

j) Korrigieren der Relativbewegung abhangig 
von der in Schritt i) berechneten Relativlage. 

2. Verfahren nach Anspruch 1, 

wobei bei der Bildaufoahmeeinrichtung eine der fol- 
genden Bedingungen erfullt ist: 

es wird eine einzelne Kamera mit Zentralprojektion 
verwendet und einem Objcktfeldwinkel von minde- 
stens 20 Grad, 

es werden zwei Kanieras verwendet, von denen minde- 
stens eine mit Zentralprojektion und einein Objektfeld- 
winkel von mindestens 20 Grad arbeitet, 
es werden drei oder mehr Kameras verwendet. 

3. Verfahren nach Anspruch 1 oder 2, wobei von min- 
destens drei Werkstiickbereichen sich keine zwei ge- 
genseitig uberlappen, 

4. Verfahren nach einem der Anspruche 1 bis 3, wobei 
fur mindestens zwei Abbildungsstrahlengange ge- 
trennle Kameras verwendet werden. 

5. Verfahren nach einem der Anspruche 1 bis 4, wobei 
■ fiir mindestens zwei AbbildungssUrahlengange die 
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selbe Kamera venvendet wird. 

6. Vcrfahren nach einem der AnsprUche 1 bis 5, wobei 
zwei Abbildungsstrahlengange S 1 und S2 untereinan- 
der parallele Strahlen besitzen und ein dritter Abbil- 
dungsstrahlengang S3 keine Strahlen besitzt, die paral- 5 
lei zu einer Mittelebene zwischen irgend zwd paralle- 
len Strahlen aus SI und S2 liegen. 

7. Vcrfahren nach einem der Anspriiche 1 bis 5, wobei 
niindestens drei Abbildungsstrahlengange untereinan- 
der keine parallelen Strahlen besitzen. 10 

8. Verfahren nach einem der Anspriiche 1 bis 7, wobei 
mindestens ein Bereich ein Merkmal aufweist, das auf 
dem Werkstuck fest ausgebildet ist 

9. Verfahren nach einem der Anspriiche 1 bis 8, wobei 

in mindestens einem Bereich ein Muster vorhanden ist, 15 
das mit Hilfe eines Beleuchtungsstrahlengangs auf dem 
Werkstuck erzeugt wird. 

10. Verfahren nach einem der Anspriiche 1 bis 9, wo- 
bei das Werkstuck oder der Greifer bzw. das Werkzeug 
von einem Roboter gehalten wird und der Roboter min- 20 
destens einen Freiheitsgrad in einer U*anslatorischen 
Koordinatenrichtung und/oder um eine oder mehrere 
Drehachsen aufweist, wobei der Roboter vorzugsweise 
insgesamt sechs Freiheitsgrade aufweist 

11. Verfahren nach Anspruch 10, wobei fur minde- 25 
stens drei Werkstuckbereiche entweder fur mindestens 
einen Abbildungsstrahlengang und/oder fur den Be- 
leuchtungsstrahlengang nach Anspruch 9 gilt: 

4er betreffende Strahlengang ist schrag oder recht- 
winklig zu den translatorischen Koordinaten des Robo- 30 
ters ausgerichtet. 

12. Verfahren nach Anspruch 10, wobei fiir minde- 
stens drei Werkstuckbereiche entweder fUr mindestens 
einen Abbildungsstrahlengang und/oder fiir den Be- 
leuchtungsstrahlengang nach Anspruch 9 gilt 35 
der betreffende Strahlengang ist schrag oder recht- 
winklig ausgerichtet zu der Tangente an die Kreise der 
Punkte des Werkstuckbereichs um die Drehachsen. 

13. Verfahren nach einem der Anspriiche 1 bis 12, 

mit mehrstufiger Arbeitsweise, 40 
mit Ausfiihrung der Schritte g) bis j) in jeder Stufe, 
wobei, in der ersten Stufe eine grobe Lagekorrektur 
realisiert wird und in den weiteren Stufen, eine zuneh- 
mend genaue Lagekorrektur realisiert wird, mit einer 
jeweils zugehdrigen Ausgangslage in jeder Stufe. 45 

14. Verfahren nach einem der Anspriiche 1 bis 13, mit 
mehreren Satzen von Bildbereichen, wobei abhangig 
vom aktuellen Bildinhalt ein Satz von Bildbereichen 
zur Lagekorrektur gewahlt wird. 

15. Verfahren nach einem der Anspriiche 1 bis 14, mil 50 
einem Selbstuberwachungsbelrieb mit den Schritten: 

- Durchf iihren der Schritte g) bis j) und Komgie- 
ren der Lage der Bildaufnahmeeinrichtung, und 

- emeules Durchflihren der Schritte g) bis j) fiir 
dicse Lage und Priifen, ob die neu berechnete Re- 55 
lativbewegung ausreichend klein ist 

16. Verfahren nach einem der Anspriiche 1 bis 14, mit 
einem Selbstiiberwachungsbelrieb mil den Schritten: 

- Durchfuhren der Schritte g) bis i) und Spei- 
chem der Korrekturwerte K-NuU 60 

- wiederholtes Anordnen der Bildaufnahmeein- 
richtung in verschiedenen Lagen 1, mit bekannten 
Lageabweichungen Delta-1 von der Ausgangslage 

- fiir jede dieser Lagen 1: 

- Durchflihren der Schritte g) bis i), mit Berech- 65 
nen der Korrekturen K-Neu-1, 

- Vergleichen der Korrekturen K-Neu-1 mit der 
Superposition von K-NuU und Delta-1. 


17. Verfahren nach Anspruch 15 oder 16, wobei die 
Selbstiiberwachung ein Priifergebnis iiber eine Abwei- 
chung der erzielten Korrektur liefert, mit der eine auto- 
matische Adaption an langsam und/oder geringfugig 
veranderUche geomctrische Gegebenheiten realisiert 
wird, vorzugsweise eine Anderung der Befestigung 
und/oder Einstellung einer Bildaufnahmeeinrichtung 
und/oder eine Temperaturdrift der Kinemadk des Ro- 
boters nach Anspruch 10. 

18. Vorrichtung zur dreidimensionalen Korrektur der 
Reladvbewegung mit mehreren Freiheitsgraden zwi- 
schen Weri^tiicken einerseits, und Greifer oder Werk- 
zeugen andererseits, mit einer Bildaufoahmeeinrich- 
tung aus einer oder mehreren Kameras, wobei die Bild- 
aufnahmeeinrichtung und/oder das Werkstiick reprodu- 
zierbar bcweglichen ist 

wobei in einem Einrichtbetrieb folgende Schritte 
durchfiihrbar sind: 

a) Abbilden von einem oder mehreren Bereichen 
des Werkstiicks, iiber je mindestens einen den Be- 
reichen zugeordneten Abbildungsstrahlengang, 

b) Anordnen eines Werkstiicks in einer systema- 
tisch gewahlten oder zufalligen Standardlage, 

c) Anordnen der Bildaufnahmeeinrichtung in ei- 
ner Ausgangslage, 

d) Aufnehmen mindestens eines Bildes iiber je- 
den Abbildungsstrahlengang, 

e) Speichem der Bilder aus SchriU d) und/oder 
davon abgeleiteter Daten, und 

f) Anordnen der Bildaufnahmeeinrichtung bzw. 
des Werkstiicks in Reladvlagen zur Ausgangslage 
bzw. Standardlage, wobei jeder Freiheitsgrad 
mindestens einmal gegeniiber der Ausgangslage 
bzw. Standardlage variiert wird, wobei 

fiir jede Relativlage: 

die Relativlage selbst explizit oder implizit ge- 
speichert wird, 

die Schritte d) und e) wiederholt werden, 
und/oder in einem Automatikbetrieb folgende 
Schritte durchfiihrbar sind: 

g) Aufnehmen mindestens eines Bildes von je- 
dem der Bereiche des Werkstiicks iiber je minde- 
stens einen der ihnen zugeordneten Abbildungs- 
strahlengange, in Ausgangslage der Bildaufnah- 
meeinrichtung oder einer zur Ausgangslage repro- 
duzierbar abweichenden Lage 

h) Vergleich der in Schritt g) aufgenommenen 
Bilder und/oder der davon abgeleiteten Daten nut 
Bildem bzw. Daten der entsprechenden Abbil- 
dungsstrahlengange aus einem Einrichtbetrieb, 

i) Beslimmen der aktuellen Relativlage des 
Werkstiicks zur Standardlage auf Basis des Ver- 
gleichs in Schritt h), 

j) Korrigieren der Relativbewegung abhangig 
von der in Schritt i) berechncten Relativlage. 

19. Vorrichtung nach Anspruch 18, 

wobei bei der Bildaufnahmeeinrichtung eine der fol- 
genden Bedingungen erfiillt ist: 

es wird eine einzelne Kamera mit Zentralprojektion 
verwendet und einem Objektfeldwinkel von minde- 
stens 20 Grad, 

es werden zwei Kameras verwendet, von denen minde- 
stens eine mit Zentralprojektion und einem Objektfeld- 
winkel von mindestens 20 Grad arbeitet, 
es werden drei oder mehr Kameras verwendet 

20. Vorrichtung nach Anspruch 18 oder 19, wobei von 
mindestens drei Werkstiickbereichen sich keine zwei 
gegenseitig iiberlappen. 
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21. Vorrichtung nach einem der Anspriiche J 8 bis 20, 
wobei fur mindestens zwei Abbildungsstrahlengange 
getrennte Kameras vorgesehen sind. 

22. Voirichtung nach einem der Anspriiche 18 bis 21, 
wobei filr mindestens zwei Abbildungsstrahleng^nge 5 
die selbe Kamera vorgesehen ist 

23. Voirichtung nach einem der Anspriiche 18 bis 22, 
wobei zwei Abbildungsstrahlcngange S 1 und S2 unter- 
einander parallele Strahlen besitzen und ein dritter Ab- 
bildungsstrahlengang S3 keine Strahlen besitzt, die 10 
parallel zu einer Mittelebene zwischen irgend zwei par- 
allelen Strahlen aus SI und S2 liegen. 

24. Vorrichtung nach einem der Anspriiche 18 bis 22, 
wobei mindestens drei Abbildungsstrahlengange unter- 
einander keine parallelen Strahlen besitzen. 15 

25. Vorrichtung nach einem der Anspriiche 18 bis 24, 
wobei mindestens ein Bereich ein Merkmal aufSveist, 
da s auf dem Werkstuck fest ausgebildet ist 

26. Vorrichtung nach einem der Anspriiche 18 bis 25, 
wobei in mindestens einem Bereich ein Muster voriian- 20 
den ist, das mit Hilfe eines Beleuchtungsstrahlengangs 
auf dem Werkstiick erzeugt wird. 

27. Vorrichtung nach einem der Anspriiche 18 bis 26, 
wobei das WerkstDck oder der Greifer bzw. das Werk- 
zeug von einem Roboter gehalten wird und der Roboter 25 
mindestens einen Freiheitsgrad in einer translatori- 
schen Koordinatenrichtung und/oder um eine oder 
mehrere Drehachsen aufweist, wobei der Roboter vor- 
zugsweise insgesamt sechs FreiheiLsgrade aufweist 

28. Vorrichtung nach Anspruch 27, 30 
wobei fiir mindestens drei Werkstiickbereiche entwe- 
der fiir mindestens einen Abbildungsslrahlengang und/ 
oder ftir den Beleucbtungsstratilengang nach Anspruch 

26 gilt: 

der betreffende Strahlengang ist schrSg oder recht- 35 
winklig zu den translatorischen ICoordinaten des Robo- 
ters ausgerichtet.. 

29. Vorrichtung nach Anspruch 27, wobei fiir minde- 
stens drei Werkstiickbereiche entweder fur mindestens 
einen Abbildungsstrahlengang und/oder fiir den Be- 40 
leuchtungsstrahlengang nach Anspruch 26 gilt: 

der betreffende Strahlengang ist schrag oder recht- 
winklig ausgerichtet zu der Tangente an die Kreise der 
Punkte des Werkstuckbereichs nm die Drehachsen. 

30. Vorrichtung nach einem der Anspriiche 18 bis 29, 45 
bei der eine mehrstufige Arbeitsweise durchfuhrbar ist, 
mit Ausfiihrung der Schritte g) bis i) in jeder Stufe, 
wobei, in der ersten Stufe eine grobe Lagekorrektur 
rcalisiert wird und in den weitcrcn Stufen, cine zuneh- 
mend genaue Lagekorrektur realisiert wird, mit einer 50 
jeweils zugehorigen Ausgangslage in jeder Stufe. 

31. Verfahrcn nach einem der Anspriiche 18 bis 30, 
mit mehreren Satzen von Bildbereichen, mit der M6g- 
iichkeit, abhangig vom aktuellen Bildinhalt einen Salz 
von Bildbereichen zur Lagckorrcktiir zu wahlen. 55 

32. Vorrichtung nach einem der Anspriiche 18 bis 31, 
wobei in einem Selbstiiberwachungsbetrieb folgende • 
Schritte durchfiihrbar sind: 

- Durchfiihren der Schritte g) bis i) und Korrigie- 
ren der Lage der Bildaufnahmeeinrichtung, und 60 

- emeutes Durchfiihren der Schritte g) bis i) fiir 
diese Lage und Priifen, ob die neu berechnete Re- 
lativbewegung ausreichend klein ist. 

33. Vorrichtung nach einem der Anspriiche 18 bis 31, 
wobei in einem Selbstiiberwachungsbetrieb folgende 65 
Schritte durchfiihrbar sind: 

- Durchfuhren der Scliritte g) bis i) und Spei-. 
chem der Korrekturwerte K-Null, 


20 


- wiederholtes Anordnen der Bildaufiiahmeein- 
richtung in verschiedenen Lagen 1, mit bekannten 
Lageabweichungen Delta-1 von der Ausgangs- 
lage, 

- ftir jede diescr Lagen 1: 

- Durchfiihren der Schritte g) bis i), mit Berech- 
nen der Korrekturen K-Neu-1. 

- Vergleichcn der Korrekturen K-Neu-1 mit der 
Superposition von K-Null und Delta-1. 

34. Vorrichtung nach Anspruch 32 oder 33, wobei die 
Selbstiiberwachung ein Priifergebnis iiber eine Abwei- 
chung der erzielten Korrektur liefeat, mit der eine auto- 
matische Adapdon an langsam und/oder geringftigig 
veranderliche geometrische Gegebenheiten realisiert 
wird, vorzugsweise eine Anderung der Befestigung 
und/oder EinsteUung einer Bildaufnahmeeinrichtung 
und/oder eine Temperaturdrift der Kinemadk des Ro- 
boters nach Anspruch 27. 
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Abstract of DE1 01 59574 

The movement correction method uses an imaging system with at least 3 cameras (10,11,12) for 
monitoring the relative movement between the robot gripper or machining tool and the workpiece. The 
workpiece is placed in a standard position and the imaging system is moved from an initial position into 
a series of defined positions, with storage of the obtained camera Images and/or the image data in 
each position, for comparison with actual images for detection and correction of movement errors. An 
Independent claim for a device for 3-dimensional relative movement correction for a robot gripper or 
machining toot is also included. 


Data supplied from the esp@cenef database - Worldwide 


